托不敢为之，羲便操笔，辞甚切直。由是忤三思意，转秘书少监，再迁吏部侍郎。时吏部侍郎崔湜、太常少卿郑愔 、大理少卿李元 恭分掌选事，皆以赃货闻，羲最守正，时议美之。寻加银青光禄大夫、右散骑常侍、同中书门下三品。睿宗即位，

表削诸武封王者，众畏三思，不敢为草，独羲为之，词谊劲切，由是下迁秘书少监。进吏部侍郎。时崔湜、郑愔及 大理少卿李元恭 分掌选，皆以贿闻，独羲劲廉，为时议嘉仰。帝崩，诏擢右散骑常侍、同中书门下三吕。睿宗立，罢为陕州刺史，